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(54) Bezeichnung: VERFAHREN ZUM INSPIZIEREN VON KANALROHREN 



Xr.Yr^r 



< 



en 
oo 

O 




AA SCENE (n+2) 
BB SCENE (n*1) 
CC SCENE (n) 

(57) Abstract: The invention relates to a method for inspecting channel pipes, wherein hemispherical or fully spherical digital 
images captured at various locations ( 18) in the pipe by means of a camera provided with a fish-eye lens are calculated and perspective 
images enabling a virtual swivelling are produced. The intermediate images arising for any specific neighbouring location (16) (of 
the desired Active camera position) are calculated and represented on the basis of image data captured in a location (18) wherein the 
geometry of the imaged pipe is known, by computationally projecting the captured images onto the known pipe geometry and by 
calculating the perspective image data therefrom for the neighbouring location. 

[Fortsetzung auf der ndchsten Seite] 
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Zur Erkldrung der Zweibuchstaben-Codes und der anderen Ab- 
kurzungen wird auf die Erklarungen ("Guidance Notes on Co- 
des and Abbreviations") am Anfangjeder reguldren Ausgabe der 
PCT-Gazette verwiesen. 



(57) Zusammenfassung: Verfahren zum Inspizieren von Kanalrohren, bei dem mit einer mit einer Fisheye-Linse versehenen Ka- 
mera an bestimmten Orten (18) im Rohr aufgenommene, hemi- oder vollspharische digitale Bilder unter Erzeugen von ein virtuelles 
Verschwenken erlaubenden, perspektivischen Bilder verrechnet werden, wobei bei bekannter Geometrie des abgebildeten Rohrs aus 
den an einem Ort (18) genommenen Bilddaten die sich fiir an einem beliebigen benachbarten Ort (16) (der gewiinschten fiktiven 
Kameraposition) ergebende Zwischenbilder errechnet und dargestellt werden, indem die aufgenommenen Bilder rechnerisch auf die 
bekannte Rohrgeometrie projiziert und die sich daraus fiir den benachbarten Ort ergebenden perspektivischen Bilddaten errechnet 
werden. 
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Verfahren zum Inspizieren von Kanalrohren 



Die Erfindung betrifft ein Verfahren zum Inspizieren von Rohren wie Abwasserrohren, 
Pipelines und dgl. 

Aus der EP 1022553 Bl ist ein in einem Kanalrohr verfahrbarer Kamerawagen bekannt, der 
zur Erzeugung vollspharischer Bilder an definierten Streckenabschnitten langs der Rohrach- 
se (z.B. alle 5cm) mit Weitwinkelobjektiven, insbesondere auch Fisheye-Objektiven, einge- 
richtet ist. Die digitalen Bildsignale werden gespeichert und konnen zu einem spateren Zeit- 
punkt optisch ausgewertet werden. Aus der US 5,185,667 ist ein Verfahren zur Erzeugung 
perspektivischer Abbildungen mit Schwenk-, Neige-, Dreh- und VergroBenmgsfunktionen 
aus mit einem Fisheye-Objektiv gefertigten digitalen Bildem bekannt, das ein Betrachten 
der an dem Aufoahmepunkt aufgenommen Bilder in verschiedenen Richtungen, aber nur 
von diesem Punkt aus, ermSglicht 

Bei einer Anwendung dieses Verfahrens zum Wiedergeben von Aufhahmen von einzelnen 
Bildem an verschiedenen Orten in dem Kanalrohr kann durch ein geeignetes Verrechnen 
der gewonnen Bildsignale jeder Ort der Rohrwandung betrachtet werden, aber nur von den 
diskreten Orten, an denen die Aufiiahmen gefertigt worden sind. Wenn die Fahrt des Kame- 
rawagens durch das Kanalrohr nachvollzogen wird, so springt das Bild von Aufiiahmeort zu 
Aufiiahmeort. Es ist aber erwunscht, bei dem nachtraglichen virtuellen Durchfahren des Ka- 
nals den Eindruck eines tatsachlichen Durchfahrens zu erzeugen, also Bilder von Orten aus 
wiederzugeben, an denen tatsSchlich gar keine Aufiiahme gefertigt worden ist. 

Der Erfindung liegt die Aufgabe zugrunde, anhand diskreter, an definierten Streckenab- 
schnitten des Rohre aufgenommener hemispharischer oder vollspharischer Bilder eine kon- 
tinuierliche axiale Kanalinspektionsbefahrung zu simulieren, also an beliebigen (auBerhalb 
der optischen Zentren der Bildaufiiahmen liegenden) Orten perspektivische Bilder zu erzeu- 
gen. 
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ErfindungsgemaB wird diese Aufgabe durch die Merkmale des Hauptanspruchs gelost, die 
Unteransprflche geben vorteilhafte Ausgestaltungen der Erfindung an. 

Die Erfindung nutzt den Umstand, dass bei Rohrsystemen deren Geometrie (MaBe und Pro- 
fil) und der Ort der Kamera innerhalb des Rohres jedenfalls nSherungsweise bekannt sind. 
Dies macht es mSglich, aus diskreten Bildern an definierten Streckenabschnitten (z.b. alle 
5cm) kontinuierliche Ansichten lSngs der Rohrachse zu errechnen, die zwischen den eigent- 
lichen Originalaufiiahmen liegen. 

Hierzu werden die Bilddaten der hemispharischen oder vollspharischen Bilder (eine bzw. 
zwei Fisheyeauftiahmen) ausgehend von dem Ort der Kamera in dem Rohr rechnerisch auf 
die Innenflache der bekannten Rohrgeometrie projiziert, wobei mathematisch ein unendlich 
langes dreidimensionales Rohrmodel verwendet wird, Zu jedem Bildpunkt des 2D-Fisheye- 
Bildes P(Xf,Yf) mit bekannter Abbildungsfunktion (z.b. F-Theta-Objektiv) errechnen sich 
die Einfallswinkel (a,0 der Kugelkoordinaten) und daraus ein korrespondierender Bildpunkt 
im 3D-Raum P'(Xr 5 Yr,Zr) auf der Rohrinnenflache. Fur jeden Ort der Originalaufiiahmen 
kann im Speicher des Rechners eine solche 3D-Szene aufgebaut werden. Mit bekannten 
Techniken der 3D-Grafikvisualisierung kann nun eine zweidimensionale perspektivische 
Ansicht erzeugt werden. Neben Schwenk-, Neige-, Dreh- und VergrdBerungsfunktionen er- 
laubt dies auch eine Translation (also die Simulation einer axialen Bewegung durch das 
Rohr an andere Orte als denen der Originalaufiiahmen). 

Befindet sich die fiktive Kamera nun im Bereich einer nSchsten Originalaufiiahme, wird mit 
dieser Aufhahme eine neue 3D-Szene aufgebaut. Der Gtiltigkeitsbereich einer Szene ent- 
spricht also dem Abstand der diskreten Originalaufiiahmezentren. 

Um die zu berechnende Datenmenge (Anzahl der Bildpunkte) zu reduzieren, kann man auch 
in der aktuellen Szene aus der gewiinschten fiktiven Kameraposition und deren Blickwinkel 
im Raum lediglich die Bildpunkt berechnen, die sich in dem gewiinschten Ausschnitt (Regi- 
on of Interest) der Bildebene B (der fiktiven Kamera) befinden. Aus den Bildpunktkoordi- 
naten der Bildebene B errechnet man mit Hilfe eines Projektionszentrums zuerst die korre- 
spondierenden Bildpunktkoordinaten auf der Innenflache der bekannten Rohrgeometrie und 
daraus die korrespondierenden Bildpunktkoordinaten in der Fisheyeaufhahme und erhalt 
somit den Farb- imd Helligkeitswert des Bildpunktes auf der Bildebene B mit P"(Xb, Yb) = 
P(Xf, Yf). Die hier ftir notwendige Mathematik ist dem Fachmann bekannt (Trigonometrie 
und Geometrie des Raumes). 
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Der Erfindung liegt damit - bildhaft gesprochen - die Idee-zugrunde, die von dem Fisheye- 
Objektiv erfassten Bilder ausgehend von dem Aufiiahmeort auf die Innenflache eines ima- 
gin§ren Rohres zu projizieren und dieses nach Umrechnung von einem beliebigen, fort- 
schreitenden Ort in zentralperspektivischen Bilder zu betrachten. 

Die Zeichnung dient zum besseren Verstandnis der Erfindung. Dabei zeigt: 

Fig. 1 eine schematische Darstellung der Errechnung der Zwischenbilder, 



Fig. 2 die Bildebene der fiktiven Kamera und 



Fig. 3 das Fisheyebild. 

Die folgenden Daten sind in der Recheneinheit (Rechenprogramm) vorgegeben bzw. vorzu- 
geben: 

♦ Das Rohrprofil und deren Maite ( z.B. Kreis- mit DN, oder Eiprofil mit Abmessungen) 
Position der Fisheyes und Winkel ihrer optischen Achsen im Rohr, 

♦ Brennweite des Fisheyes und deren Abbildungsfunktion (F-Theta-Verzeichnung), Posi- 
tion, Brennweite, Schwenk-, Neige- und Drehwinkel der fiktiven Kamera. 

In Fig. 1 sind zur Vereinfachung nur Strahlen und Koordinaten auf der Y-Z-Ebene be- 
schrieben. Die BUdebene B der fiktiven Kamera ist nach oben geneigt (nicht gedreht und 
nicht verschwenkt). Die optischen Achsen 14 der Fisheye-Objektive 10, 12 entsprechen der 
Rohrachse. 



B = Bildebene der fiktiven Kamera 



F = Brennweite der fiktiven Kamera (Abstand der Bildebene B (Projektionsebene) zum 
optisches Zentrum der fiktiven Kamera (Projektionszentrum) 

a , 0 = Einfallswinkel ins Fisheye, wobei 0 der Winkel zur Z-Achse und a der Winkel, 
den die Projektion des Strahls auf die X,Y-Ebene mit der X-Achse bildet, ist. 



(Xb,Yb) = Bildpunktkoordinaten auf der Bildebene B 
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(Xr,Yr,Zr) = BUdpunkikoordinaten auf der Rohrwand 
Es gilt P" (Xb, Yb) = P (Xf, Yf). 

Die BUdpunktkoordinaten (Xf,Yf) im F-Theta-Fisheyebild eirechnet sich aus den Einfalls- 
winkel 9 und a mit: 

Yf = sin(a) * Ff * 9 und Xf = cos(a) * Ff * 9, 
wobei Ff = Brennweite des Fisheye-Obektivs ist. 
In Fig. 1 gilt: 

a = Pi/2 -> Xf = Ound Yf=Ff * 9. 

In Fig. 1 wird angenommen, dass an besummten Orten 18 innerhalb des zu inspizierenden 
Rohres von einem Fisheye-Objektiv 10 nach vorne weisende und von einem anderen Fis- 
heye-Objektiv 12 nach hinten weisende Aufiiahmen gefertigt werden. Von einer fiktiven 
Kameraposition 16 aus, die zwischen den Orten 18, an denen Originaiauniahmen gefertigt 
wurden, werden Szenen erfasst, die von den Orten 18, an denen Originalaufnahmen gefer- 
tigt wurden, ausgehend aufgebaut werden. 
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PATENTANSPRLFCHE 



1. Verfahren zum Inspizieren von Kanalrohren, bei dem mit einer mit einer Fisheye- 
Linse versehenen Kamera an bestimmten Orten (18) im Rohr aufgenommene, hemi- oder 
vollspharische digitale Bilder unter Erzeugen von ein virtuelles Verschwenken erlaubenden, 
perspektivischen Bilder verrechnet werden, dadurch gekennzeichnet, dass 

bei bekannter Geometrie des abgebildeten Rohrs aus den an einem Ort (18) genommenen 
Bilddaten die sich fur an einem beliebigen benachbarten Ort (16) (der gewtinschten fiktiven 
Kameraposition) ergebende Zwischenbilder errechnet und dargestellt werden, indem die 
aufgenommenen Bilder rechnerisch auf die bekannte Rohrgeometrie projiziert und die sich 
daraus fur den benachbarten Ort ergebenden perspektivischen Bilddaten errechnet werden. 



2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass zu jedem Bildpunkt des 
2D-Fisheye-Bildes P' (Xf, Yf) mit bekannter Abbildungsfunktion die Einfallswinkel (a, 9) 
der Kugelkoordinaten und daraus ein korrespondierender Bildpunkt im 3D-Raum P (Xr, Yr; 
Zr) auf der Rohroberflache errechnet wird. 



3. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass aus der gewQnschten 
fiktiven Kameraposition (16) und deren Blickwinkel im Raum die Bildpunkte, die sich in 
dem gewtinschten Ausschnitt der Bildebene befinden, errechnet werden, indem aus dem 
Bildpunktkoordinaten (Xb, Yb) der Bildebene B unter Annahme eines im Abstand F von 
der Bildebene B liegenden Projektionszentrums die korrespondierenden Bildpxinktkoordi- 
naten (Xr, Yr, Zr) auf der Innenflache der bekannten Rohrgeometrie und die korrespondie- 
renden Bildpunktkoordinaten (Xf, Yf) des Fisheye-Bildes errechnet werden und so der 
Farb- und Helligkeitswert des Bildpunktes auf der Bildebene B mit P" (Xb, Yb) = P (Xf , 
Yf) gewonnen wird. 



